Web crawler definities

Web crawler

Een webcrawler, ook wel spider genoemd, is een bot die het wereldwijde web op een methodische en geautomatiseerde manier doorbladert. Dit doet deze crawler onder andere door middel van links.
Gevonden op https://www.encyclo.nl/lokaal/11508

---